• 专利附录
  • 专利说明
  • 权利要求
  • 类似技术
  • 同族专利
  • 引用文献
  • 法律状态
  • 优先权
    • 专利摘要:
    在視訊品質控制和估計中，聯合評估壓縮假象和通道假象，是問題所在。本發明考慮到在視訊總體失真之計算方法中，聯合感受壓縮假象位階Dm(V)和通道假象位階Dh(V)二者，受到壓縮假象和通道假象的影響。此方法包括步驟為，添加壓縮假象位階Dm(V)和被加數S，後者是衍生自log(Dh(V))乘以隨壓縮假象位階Dm增加而遞減之因數，諸如D(V)=Dm(V)+c．(K-Dm(V))．log(Dh(V))。所得結果為總體失真之量度。
    公开号:TW201313029A
    申请号:TW101127668
    申请日:2012-08-01
    公开日:2013-03-16
    发明作者:xiao-dong Gu；Fan Zhang；Zhi-Bo Chen
    申请人:Thomson Licensing；
    IPC主号:H04N19-00
    专利说明:
    受到壓縮假象和通道假象所影響的視訊失真之計算方法和裝置，以及在帶寬限制的傳輸系統內對視訊串流和封包損失復原串流指定可用帶寬之方法和裝置
    本發明係關於受到壓縮假象和通道假象所影響的視訊總體失真之計算方法。本發明也涉及相對應裝置。此外，本發明又關於在帶寬限制的傳輸系統內對視訊串流和封包損失復原串流指定可用帶寬之方法，以及相對應裝置。
    壓縮假象是特殊型式的資料誤差，典型上為損耗資料壓縮量化的結果。傳統壓縮假象包含濃淡不勻、模糊、雜訊、環暈。壓縮假象之自動測量，載於例如Z.Wang和A.C.Bovik著〈萬用形像品質指南〉，IEEE訊號處理通訊，第9卷，81-84頁，2002年3月，說明簡單結構類似性(SSIM)索引演算。
    通道假象係受到資料損失之資料誤差，在大部份網路中，相當於封包損失。單一封包損失影響巨塊(MB)之初次設定。各單一封包損失之假象會傳播至先前和/或後繼圖幅，為視訊寫解碼器圖幅間預估的結果。通道假象可自動測量，載於同時提出之專利申請案(見文本引用文件2)，說明一種方法，在誤差隱藏之前，估計位元串流位階，在誤差隱藏之後，可得視訊品質。
    感受跨越損耗網路的流送視訊，兼受到壓縮假象和通道假象的影響。ITU-T SG12/Q14P.NBAMS涉及在視訊序列內兼有壓縮假象和通道假象時，觀看者感受之評估方法。
    通常，評估結果以評分表示，係兼為壓縮假象和通道假象，按照平均意見分數(MOS)，映現在1至5間之分數。分數位階見表1。
    雖然有數位研究者分別針對壓縮假象和通道假象之評估問題，惟很少研究著重在顧及兼有壓縮假象和通道假象之聯合感受。傳統解決方案是，把壓縮假象和通道假象平均化，以評估總體失真。例如T.Liu,Y.Wang,J.Boyce,H.Yang和Z.Wu著〈兼顧寫碼和封包損失假象的低位元率視訊之新視訊品質公制〉，視訊媒體品質審理專輯，IEEE會刊，訊號處理選定主題，第3卷2期，280-293頁，2009年4月，利用壓縮假象和通道假象之線性組合，發生總體假象。須知「假象位階」一辭是，假象位階愈高，相當於失真愈甚，反之亦然。因此，一般需要低失真和低假象位階。
    為正確估計視訊品質，和基於如此估計來控制視訊品質，現用平均化和線性組合模式二者均不夠有效。例如，通道假象在很低壓縮假象之視訊中，似乎更加困擾，而在高壓縮假象之視訊中更能接受。此現象無法利用平均化和線性組合模式預估。
    本發明之目的，在於當視訊序列內兼有壓縮假象和通道假象存在時，提供視訊序列總體失真之預估。為解決此問題，本案揭露一種非線性組合模式，以評估總體失真，兼顧到壓縮假象和通道假象。
    本發明一要旨為受到壓縮假象和通道假象所影響的視訊總體失真之計算方法，包括添加壓縮假象位階Dm(V)和被加數S，後者係衍自log(Dh(V))乘以隨壓縮假象位階Dm增加而遞減之因數。所得結果為總體失真之量度。按照定義，壓縮假象位階Dm(V)和通道假象位階Dh(V)二者均正數。其一例為D(V)=Dm(V)+c．(K-Dm(V))．log(Dh(V)) (1)其中D(V)為視訊序列V之總體失真位階，c為一定乘法常數，K為一定被加數，log無任何基數之對象，基數通常為10(即log10)。但也可為不同基數。一般而言，上述被加數S相當於S=c．(K-Dm(V))．log(Dh(V)) (2)由於因數(K-Dm(V))必然為負數，非負數之被加數S即隨壓縮假象位階Dm(V)增加而遞減。所得失真位階D(V)為壓縮假象和通道假象所致視訊序列V總體失真之改進量度。
    藉選擇特殊一定之正乘法因數c、特殊一定之正被加數K，和/或對數之基數，可創造各種具體例。又，可用任何範圍之壓縮假象位階Dm(V)和通道假象位階Dh(V)，惟二者使用同樣範圍。在具體例中，所用假象位階範圍在應用上述方程式(1)之前，映現於MOS範圍1...5。
    受到壓縮假象和通道假象所影響的總體失真相對應計算裝置，包括加算機構，以添加壓縮假象位階Dm(V)和被加數S，其中被加數S係衍自log(Dh(V))乘以隨壓縮假象位階Dm(V)增加而遞減之因數。
    通道假象位階Dh(V)和壓縮假象位階Dm(V)二者原則上均視可用帶寬而定。所以，本發明可用在帶寬限制傳輸系統內使帶寬應用最佳。有利的是，此結果是在系統限制的傳輸系統內對視訊串流和封包損失復原串流指可用帶寬之方法。視訊系統內較高帶寬造成壓縮假象較少，而封包損失復原系統內較高帶寬造成通道假象較少。以上述最佳總體失真位階，可達成最佳帶寬應用，例如按照方程式(1)。
    因此，本發明另一要旨是，在帶寬限制的傳輸系統內對視訊串流和封包損失復原串流指定可用帶寬b之方法，其中指定給視訊串流之帶寬x，導致壓縮假象位階Dm(x)，而指定給封包損失復原串流之帶寬，導致通道假象位階Dh(b-x)，其步驟為把按照方程式(1)之總體失真減到最小，並決定相對應帶寬x。易言之，選擇帶寬x，使按照D(Dm(x),Dh(b-x))的總體失真最小。總體失真係按照上述受到壓縮假象和通道假象所影響的視訊總體失真之計算方法計算而得。
    利用此方法之裝置載於申請專利範圍第13項。
    在一要旨中，本發明係電腦可讀取式媒體，有可執行之指令，造成進行受到壓縮假象和通道假象所影響的視訊總體失真之計算方法，包括步驟為，添加壓縮假象位階Dm(V)和被加數S，後者係自log(Dh(V))乘以隨壓縮假象位階Dm(V)增加而遞減之因數。
    按照本發明特別具體例，兼顧壓縮假象和通道假象的總體失真之估計模式，如下式：D(V)=f(Dm(V),Dh(V))=Dm(V)+c0(K-Dm(V))log(Dh(V)) (3)其中K和c0為常數。c0設定於c0=0.9/log(K)，而K設定最高分數值(即最佳品質)。因此，在特別為MOS在1...5範圍內之一具體例中，K設定於K=5，而c0設定於c0=0.9/log(5)=1,2867...。
    本發明其他有利具體例，載於申請專利範圍附屬項、以下說明和附圖。
    茲參照附圖說明本發明具體例如下。
    為簡明起見，以下以Dm取代Dm(V)，以Dh取代Dh(V)。
    第1a圖表示本發明一要旨受到壓縮假象和通道假象所影響的視訊總體失真之計算決定方法流程圖。此方法包括步驟為添加14壓縮假象位階Dm和被加數S，後者係衍生13自通道假象位階之對象，即log10(Dh)乘以隨壓縮假象位階Dm增加而遞減之因數，而得該失真之量度。Dh係通道假象位階。此方法又包括一或以上之步驟，決定10壓縮假象位階Dm，決定11通道假象位階Dh，和決定12參數值K,c0，供計算14總體失真。參數值決定步驟12可隱含參數是否固定。
    壓縮假象決定步驟10可包括進行自動測量上述壓縮假象位階。在另一具體例中，壓縮假象決定步驟10檢復儲存或外部提供之壓縮假象位階。同此，通道假象決定步驟11可包括進行自動測量上述通道假象位階。在另一具體例中，通道假象決定步驟11檢復儲存或外部提供之通道假象位階。壓縮假象決定步驟10、通道假象決定步驟11和參數值決定步驟12，可同時或依序進行。
    如上所述，衍生步驟13進行至少計算被加數S，係衍生自log(Dh)乘以按照方程式(2)隨壓縮假象位階Dm增加而遞減之因數。在一具體例中，log(Dh)之計算係在衍生步驟13內進行，但在另一具體例中，可業已在決定步驟11內進行，故通道假象決定步驟11直接決定log(Dh)代替Dh。在一具體例中，log(Dh)之計算係以近似法進行。對數之基數可固定，例如log10或Ln(即loge)。
    加法步驟14把衍生之壓縮假象位階Dm，添加到被加數S，得總體假象位階(即總體失真)的量度D。
    第1b圖表示受到壓縮假象和通道假象所影響的視訊總體失真之相對應計算裝置。包括至少加算機構17，供添加壓縮假象位階Dm(V)和被加數S，後者係衍生自log(Dh(V))乘以隨壓縮假象位階Dm(V)增加而遞減之因數。一般而言，裝置可得參數K,c0，做為外顯或內蘊輸入。在一具體例中，裝置又包括輸入機構17A，從使用者界面接收控制資料，以及控制機構17B，按照控制資料設定或調節參數K和c0至少其一。
    由於本發明係關於壓縮假象和通道假象二者，而流送視訊(例如跨越損耗網路)之感受，即受到二種假象的影響，此等假象說明如下。
    壓縮假象為特殊類型之資料誤差，典型上為損耗資料壓縮量化的結果。傳統壓縮假象包含不均勻、模糊、雜訊和環暈等。其一例第3圖所示，顯示有一人彎背。壓縮假象出現在例如背上的區域31。若無壓縮假象，背應出現穩定線32。惟至少量化誤差、不勻和雜訊破壞背的線條外觀。類似假象出現在形像的許多結構上，不確實水平或垂直。
    壓縮假象是在傳輸當中發生障礙所致。其一例為因封包損失引起的資料誤差，會發生在至少封包導向的網路。單一封包損失影響初始之巨塊(MB)集合。假象不但發生在實際圖幅或形像，因視訊寫解碼器的圖幅間預估的結果，也會傳播到先前和/或後繼圖幅或形像。通道假象的若干例，如第4和5圖所示。
    第4圖表示封包損失引起的通道假象例，經誤差隱藏後的特殊效果。若形像區域40內的形像資料失去，誤差隱藏即可以例如來自先前形像之類似資料取代，亦可插入。此舉導致細部之大損失，以及在隱藏區域40內之塗污效果。第5圖表示預估圖幅，其中預估係基於失真或誤差隱藏圖幅。所以，為若干區域(往往是數個巨塊)之預估，無參照資料可得，或使用到錯誤參照資料，而發生誤置塊50。特別會發生在高速運動區域。
    如附註2所述，通道假象可自動測量，係利用從視訊位元流摘取或計算複數全局條件特點，至少為損失的MB摘取或計算複數局部效果特點，對各(或至少為各損失)MB計算數值誤差隱藏效果位階，並提供算出的誤差隱藏效應位階，做為視訊品質之估計可見假象位階。計算數值誤差隱藏效果位階，可藉模仿誤差隱藏中所用誤差隱藏法達成。複數效果特點係例如來自空間運動均勻性、時間運動一致性、織紋平滑性，以及一或以上特殊編碼模態之或然率等群組。複數條件特點為從所接收位元流算出的各圖幅全局點。用做決定或估計為傳輸損失後的圖幅使用哪一種類的EC方法。基本條件特點為圖幅類型、MB內/MB間(即num_intra_MBs/num_inter_MBs)之比，運動指數和織紋指數。全部所用特點都是基於從寫碼視訊於位元流位階摘取之資料，即不將位元流解碼至圖元界域。
    壓縮假象之自動測量載於〈萬用形像品質指數〉，包含測量相關性損失、亮度失真和對比失真，並將三個量度組合。品質指數Q在該文件內係按照如下定義所得： 於[-1,1]之動態範圍內，其中 其中x={xi|i=1,2,...,N}和y={yi|i=1,2,...,N}分別為原有失真之形像訊號。在式(4)內，第一因數相當於相關性損失，第二因數相當於亮度失真，第三因數相當於對比失真。亦可使用他種自動測量壓縮假象。在許多情況下，利用線性映射、線性標度和/或視需要加減一常數，把結果常態化至所需範圍，例如1,...,5之MOS範圍。例如在0,...,1範圍的假象位階，在線性標度中只要乘以4，再從[0,...,4]加一，移至[1,...,5]。映射或標度是在計算之前進行，故log(D)永遠不會負數。
    本發明之一目的，在於視訊序列中兼有壓縮假象和通道假象存在時，提供總體失真預估。以V指視訊序列。在一具體例中，Dm(V)和Dh(V)按照表1所列MOS，二者在1...5範圍內。視訊D(V)之總體失真則界定為壓縮假象和通道假象之評分函數，如：D(V)=Dtot(V)=D(Dm(V),Dh(V)) (5)
    本發明係基於以下已觀察到聯合感受壓縮假象和通道假象之結論。
    首先，在聯合感受中，壓縮假象是基本因數，而通道假象是附加。在多數情況下，壓縮假象遠較通道假象平均。壓縮假象更為均勻分佈於視訊序列，而通道假象會從視訊序列的空間時間點爆發，稍後突然消失。故在瀏覽視訊時，觀看者的感受常常只被壓縮假象主宰。通道假象只會時時發生。所以，本發明之優點是，就總體感受上，壓縮假象獲得較高優先。本發明按照此項觀察界定總體感受為：D(V)=D(Dm(V),Dh(V))=Dm(V)+f 1(Dm(V),Dh(V)) (6)
    其次，當壓縮假象在低位階時，通道假象對總體感受的影響大為提高。當壓縮假象在視訊序列內位階很低時，觀看者更易受到突然出現通道假象的困擾：首先，因為低壓縮，通道假象對其高品質周遭會更為顯著；其次，在通道假象出現之前，人的心理受到較高品質圖幅的訓練，故更容易受到突然出現通道假象的困擾。因此，在擬議模式中，通道假象造成的加成效應，與否定的壓縮假象成比例。優點是模式考慮到，如果寫碼假象較高，通道假象對總體失真的影響較小。寫碼假象位階愈高，通道假象的影響愈少。
    第三，已觀察到觀看者容易辨別通道假象在較低位階時的差異。另方面，當通道假象業已在較高位階時，則較難識別通道假象之差異。因此，在所擬模式中，通道假象造成的附加效應，與-log(Dh(V))成比例如，假設Dh(V)1。結果和優點是，在通道假象低時，總體失真快速增加。當通道假象變大，總體失真慢慢增加，最後接近上限。
    第四，通道假象對總體感受之影響，是個別的，即因人不同而異。因此，在一具體例中，所擬模式之優點是，提供可組態之常數c0，以控制通道假象所造成附加效應之衝擊。就對突然通道假象高度敏感的觀看者而言，c0值可提高，反之亦然。在一具體例中，視訊失真之計算方法包括個別調節參數c0之步驟。在一具體例中，相對應裝置為使用者提供控制輸入，以調節參數c0。此可透過使用任何使用者界面(例如GUI)，設定或調節(例如在較佳標準值左右變化，諸如0.9/log(5)之類)的參數實施。
    第五，應用下列關於總體感受之額外邏輯計算：D(dm,dh1)>D(dm,dh2)if dh1>dh2 (7)
    D(dm1,dh)>D(dm2,dh)if dm1>dm2 (8)
    D(dm,0)=dm (9)
    D(5,dh)=5 (10)在上述式(7)至(10)中，dm,dm1,dm2係有效壓縮假象值，而dh,dh1,dh2係有效通道假象值。式(10)受到常態化，而「5」可改換成Dworst。
    利用上述結論之分析(基於所收集主觀資料)，本發明在一具體例中，使用下列模式，做為估計兼顧壓縮假象和通道假象之總體失真：D(V)=Dtot(V)=Dm(V)+c0 x(5-Dm(V))x log(Dh(V)) (11)
    在一具體例中，c0為常數，設定於0.9/log(5)=1,2867...。為簡化起見，在一具體例中，可設定於1,28，或介於1,2和1,3間之數值。
    第7圖表示所擬模式之績效，與已知平均和線性組合模式比較。橫座標代表通道假象位階Dh(V)，而縱座標代表總體失真位階D(V)。五條曲線從上到下分別代表Dm(V)=5,4,3,2,1。第7a圖表示本案所擬模式之模式績效，第7b圖表示習知平均化模式之模式績效，而第7c圖表示由舉例所收集資料的副組構成的主觀資料。線性組合模式之績效與第7b圖內之平均模式很類似。由此可見，所擬模式(第7a圖)比習知模式(第7b圖)更接近真實資料(第7c圖)。
    本發明一要旨，係關於帶寬指定之最適化。
    有許多封包損失復原策略，可用在視訊流送，例如同儕間視訊流送。以附加帶寬為代價，損失資料可在損失後復原。發生下述問題，則：在帶寬限制系統內，應提供多少帶寬給封包損失復原系統，而應提供多少帶寬以增進寫碼效應？所擬模式兼顧寫碼假象和通道假象以估計總體失真，有助於解決上述問題。
    以b指可得帶寬，x指分配給視訊串流之帶寬，則分配給封包損失復原計劃之帶寬為b-x。應用封包損失復原計劃，可把通道假象減到Dh(b-x)。當視訊以帶寬x壓縮，壓縮假象為Dm(x)。問題在於把Dtot(Dm(x),Dh(b-x))減到最少，其中Dtot為上述按照本發明決定之總體失真。
    第2圖表示帶寬限制傳輸系統內之應用腳本，帶寬b係視訊串流和封包損失復原串流可得者。指定給視訊串流之帶寬x導致壓縮假象位階Dm(x)，而指定給封包損失復原串流之帶寬b-x，導致通道假象位階Dh(b-x)。選擇帶寬x，使按照D(Dm(x),Dh(b-x))的總體失真減到最少。總體失真係按照受到壓縮假象和通道假象所影響的視訊中總體失真之計算方法算出，已如上述。因此，此方法可在帶寬限制之傳輸系統內，用來指定帶寬x給視訊串流，並指定其餘帶寬b-x給封包損失復原串流(或為損失資料之另一復原串流)，其方式是使總體失真最適化。例如在第2a圖中，某一帶寬21A指定給視訊串流，而其餘帶寬21B指定給封包損失復原串流，結果是第一壓縮假象位階Dm1(x)和第一通道假象位階Dh1(b-x)。在第2b圖中，更多帶寬22B指定給復原串流，故留給視訊的帶寬22A較少。因此，指定結果為第二壓縮假象位階Dm2(x)，高於(即遜於)第一壓縮假象位階(即Dm2(x)>Dm1(x))，和第二通道假象位階Dh2(b-x)，低於(即優於)第一通道假象位階(即Dh2(b-x)<Dh1(b-x))。理由是較少帶寬給視訊，結果是更多壓縮假象，而較多帶寬可供熟化壓縮假象。須知高度假象位階相當於低度視訊品質。
    同理，在第2c圖中，即使有更多帶寬23B指定給復原系統，則留給視訊串流的是更少帶寬23A。因此，指定結果為第三壓縮假象位階Dm3(x)，高於第一和第二壓縮假象位階(即Dm3(x)>Dm2(x)>Dm1(x))，而第三通道假象位階Dh3(b-x)，低於第一和第二通道假象位階(即Dh3(b-x)<Dh2(b-x)<Dh1(b-x))。然而，由於二種假象位階均需調節至最適化總體假象位階(即總體失真)，此為最適化問題，可按本發明把總體失真最小化，例如按式(11)所實施。
    第6a圖表示一種方法，在帶寬限制的傳輸系統內，把可得帶寬b指定給視訊串流21A，和封包損失復原系統21B，其中指定給視訊串流的帶寬x，導致壓縮假象位階Dm(x)，而指定給封包損失復原系統之帶寬b-x，導致通道假象位階Dh(b-x)，又其中計算視訊之總體失真Dtot，做為壓縮假象位階Dm(x)和被加數S之和14，被加數S係衍生自log(Dh(b-x))乘以隨壓縮假象位階Dm(x)增加而遞減之因數，又包括選擇步驟65，選擇帶寬x把按照Dtot(Dm(x),Dh(b-x))之總體失真減到最少。
    第6b圖表示相對應裝置。在帶寬限制傳輸系統中，裝置66指定可得帶寬b給視訊串流24A和封包損失復原串流24B，其中指定給視訊串流的帶寬x，導致壓縮假象位階Dm(x)，而指定給封包損失復原串流之帶寬b-x，導致通道假象位階Dh(b-x)。在裝置內計算視訊之總體失真Dtot，已如上述，例如參見式(3)或式(11)，又包括選擇機構67，以選擇帶寬x，使按照Dtot(Dm(x),Dh(b-x))之總體失真減到最少，例如式(3)或式(11)所示。
    在一具體例中，帶寬指定裝置66在其輸出提供一數值，代表視訊串流帶寬x和復原串流帶寬b-x至少其一，和/或相對應控制訊號或控制參數p，以控制帶寬成形裝置68。亦可為控制訊號，分別增減視訊串流帶寬x或復原串流帶寬b-x。在一具體例中，裝置66在輸出提供總體失真數值Dtot。在一具體例中，裝置66包括帶寬成形裝置68，適於把輸入視訊串流24成形為所指定帶寬x，並提供帶寬成形視訊串流24A。帶寬成形裝置68又可包括機構68A，以發生所指定帶寬b-x之復原串流24B。復原串流24B之發生機構68A，亦可在帶寬成形裝置68之外，但從選擇機構67或帶寬成形裝置68，接收控制訊號，界定復原系統24B之帶寬。
    傳輸途徑再往下，即可在決定裝置69內決定壓縮假象位階Dm(x)和通道假象位階Dh(b-x)，並做為輸入反饋至裝置66，以指定可能帶寬。本發明特別可用在視訊品質估計，和/或基於此項估計之視訊品質控制。
    須知雖然只說明壓縮假象測量和通道假象測量之特定方法，上述特定方法以外的他種壓縮假象測量和通道假象測量亦可用，均為通常技術人員所知，其構想都在本發明精神和範圍以內。
    雖然已圖示、說明，並指出本發明應用於其較佳具體例之基本新穎特點，惟技術專家均知所述裝置和方法，就所揭示裝置之形式和細部，及其操作，可進行各種省略、取代、更換，不違本發明之精神。旨在表達此等元件之所有組合，以實質上同樣方式，進行實質上同樣功能，以達成同樣結果者，均在本發明範圍內。由所述具體例之元件，取代於另一具體例，亦全然刻意並構想到。
    須知本發明所述純為舉例說明，細節可以修飾，不悖本發明範圍。說明書、申請專利範圍和附圖揭示之各特點，可單獨或按任何適當組合方式提供。特點可視適當情形以硬體、軟體，或二者之組合方式實施。申請專利範圍內出現的參照符號，只為表明，並不對申請專利範圍有限制效應。
    引用資料
    1. Z.Wanng和A.C.Bovik著〈萬用形像品質指南〉，IEEE訊號處理通訊，第9卷81-84頁，2002年3月。
    2. N.Liao,X.Gu,Z.Chen,K.Xie共同申請的國際專利申請案PCT/CN2011/000832〈在位元流位階的視訊品質之估計方法和裝置〉，國際專利申請日2011年5月12日，網際網路案件號碼PA110009。
    3. T.Liu,Y.Wang,J.Boyce,H.Wang和Z.Wu著〈兼顧寫碼和封包損失假象的低位元率視訊之新視訊品質公制〉，視訊媒體品質審理專輯，IEEE會刊，訊號處理選定主題，第3卷2期，280-293頁，2009年4月。
    10‧‧‧決定壓縮假象位階Dm之步驟
    11‧‧‧決定通道假象位階Dh之步驟
    12‧‧‧決定參數值K,c0之步驟
    13‧‧‧進行計算被加數S之衍生步驟
    14‧‧‧計算總體失真之步驟
    17‧‧‧加算機構
    17A‧‧‧輸入機構
    17B‧‧‧控制機構
    21A‧‧‧視訊串流
    21B‧‧‧封包損失復原系統
    22A‧‧‧視訊串流
    22B‧‧‧復原串流
    23A‧‧‧視訊串流
    23B‧‧‧復原系統
    24‧‧‧輸入視訊串流
    24A‧‧‧帶寬成形視訊串流
    24B‧‧‧帶寬之復原串流
    31‧‧‧背上的區域
    32‧‧‧穩定線
    40‧‧‧隱藏區域
    50‧‧‧誤置塊
    65‧‧‧選擇步驟
    66‧‧‧帶寬指定裝置
    67‧‧‧選擇機構
    68‧‧‧帶寬成形裝置
    68A‧‧‧復原串流發生機構
    69‧‧‧決定裝置
    第1a圖為總體失真計算方法之流程圖；第1b圖為總體失真計算裝置之結構圖；第2圖表示在帶寬限制傳輸系統內指定給視訊串流和封包損失復原系統之不同帶寬組態；第3圖為壓縮假象例；第4圖為誤差隱藏後，由於封包損失之通道假象例；第5圖為封包損失後，由於誤差傳播之通道假象例；第6a圖為在帶寬限制傳輸系統內指定可得帶寬給視訊串流和封包損失復原串流之方法流程圖；第6b圖為在帶寬限制傳輸系統內指定可得帶寬給視訊串流和封包損失復原串流之裝置結構圖；第7圖為所擬模式以及已知平均和線性組合模式之績效圖。
    10‧‧‧決定壓縮假象位階Dm之步驟
    11‧‧‧決定通道假象位階Dh之步驟
    12‧‧‧決定參數值K,c0之步驟
    13‧‧‧進行計算被加數S之衍生步驟
    14‧‧‧計算總體失真之步驟
    17‧‧‧加算機構
    17A‧‧‧輸入機構
    17B‧‧‧控制機構
    权利要求:
    Claims (15)
    [1] 一種受到壓縮假象和通道假象所影響的視訊失真之計算方法，包括步驟為：添加(14)壓縮假象位階Dm和被加數S，後者是衍生自log(Dh)乘以隨壓縮假象位階Dm增加而遞減之因數，Dh係通道假象位準，而得該失真之量度者。
    [2] 如申請專利範圍第1項之方法，其中被加數S是按照S=c．(K-Dm(V))．log(Dh(V))計算，其中c和K係正常數，通常假象位階係正數，而log(Dh(V))係壓縮假象位階之對數者。
    [3] 如申請專利範圍第2項之方法，其中壓縮假象位階Dm和通道假象位階Dh係在最小值Dh,m,min和最大值Dh,m,max間之範圍內測量，而K等於最大值Dh,m,max者。
    [4] 如申請專利範圍第3項之方法，其中c0實質上等於0.9/log(Dh,m,max)者。
    [5] 如申請專利範圍第3項之方法，又包括步驟為，從使用者界面接收控制資料，並按照控制資料設定或調節參數c0者。
    [6] 如申請專利範圍第2至5項中一項之方法，其中最小值Dh,m,min為1，最大值Dh,m,max為5，而c0實質上等於1,2867者。
    [7] 如申請專利範圍第1或2項之方法，又包括映射步驟，其中壓縮假象位階Dm和通道假象位階Dh，係在最小值Dh,m,min和最大值Dh,m,max間之範圍內測量，另其中利用該映射步驟中之線性操作，把最小值Dh,m,min映射於1，而最大值Dh,m,max映射於5，又其中K實質上等於5，而c0實質上等於0,9/log(5)或1,28者。
    [8] 一種在帶寬限制傳輸系統內對視訊串流(21a)和封包損失復原串流(21b)指定可用帶寬b之方法，其中指定給視訊串流(21a)之帶寬x，導致壓縮假象位階Dm(x)，而指定給封包損失復原串流(21b)之帶寬b-x，導致通道假象位階Dh(b-x)，其中視訊之總體失真Dtot係按照申請專利範圍第1至6項之一計算，又包括步驟為：選擇(65)帶寬x，係按照Dtot(Dm(x),Dh(b-x))之總體失真最小者。
    [9] 如申請專利範圍第8項之方法，其中計算視訊內之總體失真包括步驟為，添加壓縮假象位階Dm和被加數S，後者係衍生自log(Dh)乘以隨壓縮假象位階Dm增加而遞減之因數者。
    [10] 一種受到壓縮假象和通道假象所影響的視訊總體失真之計算裝置，包括加算機構(17)，供添加壓縮假象位階Dm(V)和被加數S，後者係衍生自log(Dh(V))乘以隨壓縮假象位階Dm(V)增加而遞減之因數者。
    [11] 如申請專利範圍第10項之裝置，其中壓縮假象位階Dm和通道假象位階Dh，係在最小值Dh,m,min和最大值Dh,m,max間之範圍內測量，而K實質上等於最大值Dh,m,max者。
    [12] 如申請專利範圍第11項之裝置，其中最小值Dh,m,min為1，最大值Dh,m,max為5，而c0實質上等於1,2867者。
    [13] 如申請專利範圍第10至12項中一項之裝置，又包括輸入機構(17A)，從使用者界面接收控制資料；和控制機構(17B)，按照控制資料設定或調節參數K和c0至少其一者。
    [14] 如申請專利範圍第10至13項中一項之裝置，其中被加數S係按照S=c．(K-Dm(V))．log(Dh(V))計算，其中c和K係正常數，通道假象位階係正數，而log(Dh(V))係通道假象位階之對數者。
    [15] 一種在帶寬限制傳輸系統內對視訊串流(21a)和封包損失復原串流(21b)指定可用帶寬b之裝置，其中指定給視訊串流(21a)之帶寬x，導致壓縮假象位階Dm(x)，而指定給封包損失復原串流(21b)之帶寬b-x，導致通道假象位階Dh(b-x)，其中視訊之總體失真Dtot係在申請專利範圍第10至13項中一項之裝置內計算，又包括選擇機構，供選擇帶寬x，係按照Dtot(Dm(x),Dh(b-x))之總體失真減到最少者。
    类似技术:
    公开号 | 公开日 | 专利标题
    US8405773B2|2013-03-26|Video communication quality estimation apparatus, method, and program
    JP6162596B2|2017-07-12|品質推定装置、方法及びプログラム
    Floris et al.2012|QoE assessment of multimedia video consumption on tablet devices
    TWI544786B|2016-08-01|受到壓縮假象和通道假象所影響的視訊失真之計算方法和裝置，以及在帶寬限制的傳輸系統內對視訊串流和封包損失復原串流指定可用帶寬之方法和裝置
    Jin et al.2014|Quantifying the importance of cyclopean view and binocular rivalry-related features for objective quality assessment of mobile 3D video
    Shao et al.2017|No-reference view synthesis quality prediction for 3-D videos based on color–depth interactions
    JP2005244321A|2005-09-08|音声・映像通信サービス品質推定方法及びその装置
    Korhonen2018|Learning-based prediction of packet loss artifact visibility in networked video
    JP2016510568A|2016-04-07|コンテキストベースのビデオ品質評価のための方法および装置
    Tiotsop et al.2020|Full reference video quality measures improvement using neural networks
    Toni et al.2011|MSE cross-layer optimization criteria: What else?
    Topiwala et al.2021|Vmaf and variants: Towards a unified vqa
    Topiwala et al.2020|Deep learning and video quality analysis: towards a unified VQA
    JP2016510567A|2016-04-07|コンテキスト・ベースのビデオ品質評価のための方法および装置
    CN104995914A|2015-10-21|用于基于上下文的视频质量评估的方法和装置
    Moldovan et al.2015|Performance evaluation of EMOS model for mapping-based Video Quality estimation
    CN104969548A|2015-10-07|用于基于上下文的视频质量评估的方法和装置
    Shao et al.2011|A novel error concealment approach based on general regression neural network
    JP5851330B2|2016-02-03|３ｄ映像品質評価装置及び方法及びプログラム
    Adzic et al.2014|Visually lossless coding based on temporal masking in human vision
    Kumar et al.2014|Video quality assessment methods: A bird’s-eye view
    Zadtootaghaj et al.2016|Comparison of EWPSNR and MOS on an Eye-tracking Labelled Video Dataset
    JP2018082314A|2018-05-24|総合品質推定装置、総合品質推定方法、及びプログラム
    JP2018019220A|2018-02-01|心理要因スコア推定値算出装置、心理要因スコア推定値算出方法、及びプログラム
    Li et al.2016|Video Quality Assessment by Decoupling Distortions on Primary Visual Information
    同族专利:
    公开号 | 公开日
    WO2013033913A1|2013-03-14|
    EP2754292B1|2016-08-31|
    TWI544786B|2016-08-01|
    US20140219364A1|2014-08-07|
    EP2754292A4|2015-05-06|
    CN103843339A|2014-06-04|
    EP2754292A1|2014-07-16|
    US10110893B2|2018-10-23|
    引用文献:
    公开号 | 申请日 | 公开日 | 申请人 | 专利标题
    WO2003041055A1|2001-11-02|2003-05-15|The Regents Of The University Of California|End-to-end distortion estimation for streaming of pre-compressed video|
    US8488915B2|2006-05-01|2013-07-16|Georgia Tech Research Corporation|Automatic video quality measurement system and method based on spatial-temporal coherence metrics|
    CN100588271C|2006-08-08|2010-02-03|安捷伦科技有限公司|基于分组度量和图像度量两者测量视频质量的系统和方法|
    US7965900B2|2007-09-26|2011-06-21|Hewlett-Packard Development Company, L.P.|Processing an input image to reduce compression-related artifacts|
    CN101459835A|2007-12-12|2009-06-17|上海摩波彼克半导体有限公司|认知无线电网络中提高跨层多媒体传输质量的方法|
    CN100574441C|2007-12-14|2009-12-23|武汉大学|一种感兴趣区域的率失真优化帧内刷新与码率分配方法|
    US8208563B2|2008-04-23|2012-06-26|Qualcomm Incorporated|Boundary artifact correction within video units|
    CN100588262C|2008-05-20|2010-02-03|上海交通大学|信源信道联合编码中的信道码码率分配方法|
    US20090309977A1|2008-06-12|2009-12-17|Microsoft Corporation|Benchmarking and calibrating video quality assessment tools|
    CN101729874B|2008-10-20|2013-06-19|清华大学|一种可分级视频传输处理方法及装置|
    CN101510298B|2009-03-17|2010-12-29|西北工业大学|一种ct伪影的综合校正方法|
    US20120069927A1|2010-09-17|2012-03-22|Intel Corporation|CQI feedback mechanisms for distortion-aware link adaptation toward enhanced multimedia communications|
    CN102075784B|2011-02-18|2012-11-28|中国传媒大学|一种联合考虑压缩和丢包损伤条件下的视频质量评价方法|
    JP5911563B2|2011-05-12|2016-04-27|トムソン ライセンシングＴｈｏｍｓｏｎ Ｌｉｃｅｎｓｉｎｇ|ビットストリームレベルで動画品質を推定する方法及び装置|US9693063B2|2015-09-21|2017-06-27|Sling Media Pvt Ltd.|Video analyzer|
    US9749686B2|2015-09-21|2017-08-29|Sling Media Pvt Ltd.|Video analyzer|
    JP2020043489A|2018-09-11|2020-03-19|富士ゼロックス株式会社|画像送信装置、画像受信装置、画像送信プログラム及び画像受信プログラム|
    法律状态:
    优先权:
    申请号 | 申请日 | 专利标题
    PCT/CN2011/079515|WO2013033913A1|2011-09-09|2011-09-09|Method and device for calculating distortion of a video being affected by compression artifacts and channel artifacts|
    [返回顶部]